ReCollection: Интерактивный AI-арт проект, переплетающий память и воображение

Вдохновение искусства: от личных историй к инновационным технологиям

Проект ReCollection возник на основе наблюдения за утратой памяти моей бабушки, страдающей деменцией, когда её дорогие истории превращались в разрозненные слова. В 2020 году более 50 миллионов человек столкнулись с этой болезненной реальностью потери памяти из-за болезни Альцгеймера и связанных с ней деменций. Однако на этом печальном фоне появление систем AI, преобразующих текст в изображение в 2022 году, предложило новую перспективу, используя силу языка для воображения и воссоздания разрозненных воспоминаний.

ReCollection — это AI-арт проект, который синтезирует личные воспоминания на основе языкового ввода пользователей, размывая границы между воспоминаниями и воображением через дизайн AI-системы и экспериментальную визуализацию. Превосходя свои потенциальные возможности как будущий терапевтический прототип для групп деменции, эта работа открывает новые возможности для коллективной памяти и культурного воспроизводства.

Технология реализации ReCollection включает в себя интеграцию AI-систем и экспериментальной визуализации в дизайн интерактивного арт-проекта. Используя AI-техники, такие как распознавание речи, автоматическое дополнение текста и модели преобразования текста в изображение, он переводит голосовые вводы разрозненного языка в движущуюся компьютерную графику в реальном времени. В арт-инсталляции ReCollection приглашает участников поделиться своими личными воспоминаниями в одном предложении. AI-система затем преобразует речь в текст и автоматически дополняет детали как завершенный нарратив, создавая новые визуальные воспоминания.

Технические характеристики проекта включают аудиоустановку, главный пьедестал с USB-микрофоном и кнопкой, отдельный пьедестал для инструкций, а также 4K-проектор, способный создать качественное изображение в предложенных размерах пространства 7м x 7м x 4м (Д x Ш x В).

Взаимодействие с проектом происходит через шепот участника в микрофон, где AI система автоматически дополняет детали произнесенных слов, создавая текст с нарративом с использованием GPT-4, большой языковой модели. Завершенный нарратив отправляется в Stable Diffusion для генерации синтетических изображений, представляющих воспоминания на основе интерпретации машины. Полученные изображения далее развиваются и визуализируются алгоритмически как эволюционирующий интерактивный опыт.

Проект ReCollection был представлен в Лос-Анджелесском конгресс-центре (США), галерее иммерсивного искусства Signal (Канада), Центре медиа и иммерсивного опыта (США) и будет представлен в Cinema Mystica (Венгрия).

ReCollection представляет собой ансамбль интимных артефактов человеко-машинного взаимодействия, подчеркивающий вклад трех сторон: художников, машин и участников. Это настраиваемое AI-приложение использует множество AI-техник, таких как распознавание речи, автоматическое дополнение текста и преобразование текста в изображение, для преобразования языкового ввода в последовательности изображений новых воспоминаний. Как интерактивный опыт, участники будут шептать свои личные воспоминания с разрозненными предложениями, и наша система будет автоматически дополнять детали, создавая новые трогательные визуальные воспоминания.

Проект ReCollection стал обладателем Бронзовой награды A' Idea and Conceptual Design Award в 2024 году. Бронзовая награда A' Design Award присуждается выдающимся и творчески оригинальным дизайнам, подтверждающим опыт и изобретательность. Ценится за включение лучших практик в искусстве, науке, дизайне и технологиях, они демонстрируют сильные технические и творческие навыки и способствуют улучшению качества жизни, делая мир лучше.